SciRet: A Compute-Aware Empirical Study of Retrieval and Reranking for Scientific RAG
SciRet:面向科学RAG的检索与重排序计算感知实证研究
🧭 科学RAG检索与重排序实证分析
Laurentian University · North South University
在科学问答RAG中,混合检索更鲁棒,跨域重排序可能有害,且生成忠实度随语料规模增大而提升。
📌 工作参考价值(4 点)
- 电商搜索/推荐场景的 RAG 系统应优先采用混合检索(稀疏 BM25 + 稠密向量),它在不同索引规模下均更鲁棒,可避免单一方式在长尾或新类目上的性能塌陷。
- 重排序模型必须使用领域内数据微调;直接使用通用 Web 数据(如 MS MARCO)训练的 cross-encoder 会因领域不匹配而损伤检索精度,建议用业务日志中的点击/转化数据构建正负例进行微调。
- 随索引语料规模增大,生成回答的忠实度(faithfulness)可能自然提升,但需权衡计算成本;在工程上可考虑分层检索或动态调整检索深度。
- 句子窗口分块策略简单有效,适用于商品描述、用户评论等长文本场景,可作为 baseline 快速验证。